Mặt chiếc đồng hồ to lớn đủ để tháp Big Ben từng nổi tiếng với cái tên "Chiếc đồng hồ bốn mặt lớn nhất thế giới". Nhưng đó đã là quá khứ. Kỷ lục của chiếc đồng hồ lừng danh này đã bị một chiếc đồng hồ khác vượt qua, đó là chiếc tháp đồng hồ Allen-Bradley ở Milwaukee, Wisconsin. Thế nhưng chiếc đồng hồ Allen-Bradley cuối cùng lại không được người xây dựng lắp cho quả chuông nào, vì vậy, tới hiện tại, Big Ben vẫn được gọi là "chiếc đồng hồ bốn mặt có chuông lớn nhất thế giới". Hệ thống máy móc của tháp đồng hồ Big Ben (thực ra Big Ben chỉ là tên gọi của chiếc chuông chính nặng 13,5 tấn được treo ở chiếc tháp đồng hồ này) đã được hoàn thành từ năm 1854 nhưng tòa tháp lại được hoàn thành sau đó 4 năm (năm 1858).

Chiếc đồng hồ và cấu trúc mặt số của nó được Augustus Pugin thiết kế. Mỗi mặt của chiếc đồng hồ được đặt vào trong một khối đá hình vuông có cạnh là 21 feet hay 7 m, cùng với tổng cộng 576 miếng kính trong suốt, gần giống như kiểu các ô cửa sổ bằng kính có khắc những bức tranh ở nhà thờ Anh thời đó. Xung quanh mặt đồng hồ được khắc những đường viền tạo thành một chiếc khung. Cạnh dưới của khung ở mỗi mặt đồng hồ có khắc dòng chữ Latinh: "DOMINE SALVAM FAC REGINAM NOSTRAM VICTORIAM PRIMAM" có nghĩa là: "Xin chúa hãy bảo vệ cho nữ hoàng Victoria của chúng con".

Khi toà tháp hoàn thành, bốn mặt đồng hồ mang màu nguyên bản là vàng và xanh cô ban (sơn trên mặt số và kim đồng hồ). Tuy nhiên, vào những năm 1930, khi sửa chữa những thiệt hại do Thế chiến I gây ra, bốn mặt đồng hồ đã được sơn thành màu đen và vàng mà chúng ta thấy những năm gần đây.

Chiếc đồng hồ bắt đầu được mở cửa cho khách tham quan lần đầu tiên từ ngày 7 tháng 9 năm 1859. Trong suốt Thế chiến II, cung điện Westminster đã bị trúng bom do người Đức oanh tạc, phá hủy nhà khách của cung điện và gây hư hại tới mặt phía Tây của chiếc đồng hồ.

Ngoài ra, do khói bụi ô nhiễm cùng với điều kiện thời tiết khắc nghiệt, cứ 5 năm một lần, tháp đồng hồ lại dừng hoạt động (ngừng đổ chuông và các kim chỉ đúng 12 giờ trưa) để các công nhân treo mình làm vệ sinh trên bốn mặt đồng hồ (kéo dài một tuần).